Europaisches 
Patentamt 


Eur pean 
Patent Office 


Office uropeen 
des brevets 


Bescheinigung Certificate Attestation 


Die angehefteten Unterla- 
gen stimmen mit der 
ursprunglich eingereichten 
Fassung der auf dem nach- 
sten Blatt bezeichneten 
europaischen Patent a nmel- 
dung uberein. 


The attached documents Les documents fixes a 
are exact copies of the cette attestation sont 
European patent application conformes a la version 
described on the following initialement deposee de 
page, as originally filed. la demande de brevet 

europeen specifier a la 
page suivante. 


Patentanmeldung Nr. Patent application No. Demande de brevet n° 

02020474.9 


Der President des Europaischen Patentamts; 
Im Auftrag 

For the President of the European Patent Office 

Le President de I'Office europeen des brevets 
p.o. 


R C van Dijk 


DEN HAAG,DEN 

THE HAGUE, 26/09/02 

LA HAYE,LE 


EPA/EPO/OEB Form 1014 - 0251 



Eur paisches 
Patentamt 


European 
Patent Office 


Office europeen 
des brevets 


Blatt 2 der Bescheinigung 
Sheet 2 of the certificate 
Page 2 de ^'attestation 


Anmeldung Nr.: 
Application no.: 
Demande n*. 


02020474.9 



Anmelder 
Applicant(s): 
Demandeur(s): 
BralnLAB AG 

85551 Klrchheim/Helmstetten 

GERMANY 

Siemens AG 

80333 MUnchen 

GERMANY 

Bezeichnung der Erfindung: 
Title of the invention: 
Titre de i'invention: 

Rdntgenbi 1 dunterstutzte Navigation mir urspriingl Ichen, zwel dimensional en Rontgenbl Idem 


In Anspruch genommene Prioriat(en) / Priority(ies) claimed / Priorite(s) revendiquee(s) 

Staat: Tag: Aktenzeichen: 

State: Date: File no. 

Pays: Date: Numero de depot: 


Internationale Patentklassifikation: 
Internationa) Patent classification: 
Classification Internationale des brevets: 


Contracting states designated at date of filing: AT/BE/CH/CY/DE/DK/ES/FI/FR/GB/GR/IE/IT/LI/LU/MC/NL/PT/SE/TR 


Etats contractants designes lors du depot: 

Bemerkungen: 

Remarks: 

Remarques: 


EPA/EPO/OEB Form 1012 - 11.00 


/ 


Am Anmeldetag benannte Vertragstaaten: 


j 



EPO - Munich 

Anwaltsakte: 53 831 XV j 2 
Anmelder: BrainLAB AG 


Rontgenbildunterstutzte Navigation mit ursprunglichen, zweidimensionalen Rontgen- 

bildern 


Die vorliegende Erfmdung betrifft die rontgenbildunterstutzte Navigation im medizinischen 
Bereich. Sie stellt ein Verfahren zur Bilddarstellung bei einem medizinischen Navigations- 
system mit Rontgenbildunterstutzung zur Verfugung. 

Die moderne, computergestutzte Chirurgie ist mit Hilfe von medizinischen Navigationssys- 
temen in der Lage, wahrend der Operation Instrumente oder hnplantate des Chirurgen auf 
einem Monitor in Relation zu anatomischen Bilddaten darzustellen. Diese anatomischen 
Bilddaten eines Patienten konnen entweder pra- oder aber intra-operativ akquiriert werden 
und aus verschiedenen Modalitaten bestehen (CT, MRI, PET, SPECT, Rontgenbilder oder 
Kombinationen hiervon). 

In der computergesttitzten Chirurgie ist es derzeit auch ublich, mit Hilfe eines Rcmtgengera- 
tes, das meist in Form eines C-Bogens verwendet wird, Bilddaten zu erheben und diese Daten 
dann mit Hilfe eines Navigationssystems nutzbar zu machen. Das Computersystem verarbei- 
tet die Bilddaten und "registriert" sie, d. h. das System bestimmt die genaue Position von 
Bilddaten in Relation zu einer vorher definierten Referenz, zum Beispiel am Patienten im 
Raum. Es ist danach moglich, auf diesen gewonnenen Daten die Position eines Instruments 
darzustellen, d. h. zu navigieren. 

Die rontgenbasierte Navigation hat den Vorteil, dass sie es durch ein sehr einfaches Registrie- 
rungsverfahren dem Chirurgen ennoglicht, einfach, unkompliziert und schnell die Hilfe der 
Navigation in Anspruch nehmen zu konnen. Isoliert stellt die Rontgennavigation eine wert- 
volle Hilfe fur den Chirurgen zur Verfugung, jedoch hat sie bei den derzeit angewandten 
Methoden den Nachteil, dass jedes Bild einzeln registriert und dann in richtiger Relation zu 
den Instrumenten oder Apparaten dargestellt werden muss. 
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Ferner existieren Systeme, die sowohl die Navigation auf der Basis von Volumendatensatzen 
(zum Beispiel CT, MRI) nutzen, als auch zusatzlich einzeln zu registrierende Rontgenbilder 
bzw. rekonstruierte Rontgenbilder, die aus dem Volumendatensatz bzw. aus verarbeiteten 
Rontgenbildsatzen heraus rekonstruiert werden. Der Nachteil hierbei besteht darin, dass die 
Rontgenbilder im urspriinglichen Zustand eigentlich sehr gute Abbildungsdaten mit hohem 
Kontrast und guter Detailgenauigkeit liefern, diese Vorteile jedoch bei der Umrechnung in 
einen 3D-Volumendatensatz sowie bei der nochmaligen Zuruckrechnung auf rekonstruierte 
Rontgenbilder teilweise verloren gehen. Der Chirurg muss dann mit Bilddaten navigieren, 
deren Bildinhalt weniger gut ist als derjenige der ursprtinglich akquirierten Rontgenbilder. 

Aus der WO 96/1 1624 ist ein chirurgisches Navigationssystem mit Referenz- und Lokalisie- 
rungsrahmen bekannt. Die US 5,980,535 offenbart eine Vorrichtung fur ein anatomisches 
Tracking- Verfahren, bei dem Positionssignale verarbeitet werden, die von einem Referenz- 
objekt an einem Schwing-Arm einer Kopfklammer stammen. 

Die US 6,314,310 Bl offenbart ein rontgenbild-gefuhrtes, chirurgisches Lokalisierungssystem 
mit erweitertem Mapping- Volumen, bei dem Rontgenbilder aus einem Fluoroskop(C-Bogen)- 
RSntgengerat iiber Referenzelemente in Relation zu chirurgischen Instrumenten registriert 
werden. Aus der DE 199 17 867 Al ist ein Verfahren und eine Vorrichtung zur bildunter- 
stutzten Behandlung von Behandlungszielen mit Integration von Rontgenerfassung und Navi- 
gationssystem bekannt. Die US 6,048,097 zeigt eine Rontgen-Untersuchungsvorrichtung mit 
einem C-Bogen auf, wobei in mindestens einer Position des C-Armes eine isozentrische Be- 
strahlung erfolgt. 

Es ist die Aufgabe der vorliegenden Erfindung, ein Verfahren fur die rontgenbildunterstiitzte 
Navigation zur Verfiigung zu stellen, welches die oben genannten Nachteile des Standes der 
Technik iiberwindet. Insbesondere soli gewahrleistet werden, dass dem Chirurgen detailge- 
naue Rontgenbilder ftir die Navigation zur Verfiigung gestellt werden. Ferner soil die auf- 
wandige Einzelregistrierung intra-operativ erstellter Rontgenbilder moglichst vermieden wer- 
den. 
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Diese Aufgabe wird erfindungsgemaB gel6st durch ein Verfahren zur Bilddarstellung bei ei- 
nem medizinischen Navigationssystem mit Rontgenbildunterstutzung, bei dem mittels eines 
vorab im Navigationssystem kalibrierten R6ntgengerates eine Vielzahl von Rontgenbildern 
eines Patienten axis unterschiedlichen Positionen erstellt werden, wahrend mittels eines medi- 
zinischen Navigationssystems eine Positionsbestimmung fur das Rontgenger&t erfolgt, die 
erhaltenen Patientendaten aus den erstellten Rontgenbildern durch Verarbeitung im Rontgen- 
gerat-System auf der Basis der Kalibrierung ausgewertet und raumlich umgesetzt werden, 
zusatzlich zu den ausgewerteten und umgesetzten Patientendaten noch die urspriinglichen 
zweidimensionalen Rontgenbilder und die den Rontgenbildern zugehorigen Erstellungsinfor- 
mationen an das Navigationssystem ubergeben werden, und bei dem die zweidimensionalen 
Rontgenbilder navigationsuntersttitzend auf einer Bildausgabe des Navigationssystems ange- 
zeigt werden. 

Der Vorteil des erfindungsgemaBen Verfahrens liegt insbesondere in der Bereitstellung der 
urspriinglichen, zweidimensionalen Rontgenbilder begriindet. Diese Rontgenbilder sind de- 
tailgetreuer als die herkommlicherweise verwendeten, aus dem Volumendatensatz rekon- 
struierten Rontgenbilder und sie weisen einen besseren Kontrast auf. Ferner ist es derzeit fur 
Chirurgen, die es gewohnt sind, zweidimensionale RSntgenbilder zu interpretieren, auch 
leichter, diese urspriinglichen Rontgenbilder in ihrer gewohnten Form auch bei der Navigati- 
on zu interpretieren. Da die vom Patienten erstellten Rontgenbilder schon gleich bei der Er- 
stellung im Navigationssystem registriert werden und die Bilddaten zusammen mit den Re- 
gistrierungsinformationen fur alle Bilder zur Verfiigung stehen, ist es nicht mehr notwendig, 
erstellte R6ntgenbilder jeweils einzeln und separat zu registrieren, urn die Navigation zu er- 
moglichen. Der Chirurg kann wahlweise auf den aus den erhaltenen Bilddaten erstellten drei- 
dimensionalen Darstellungen (Volumendatensatz) navigieren oder auf den gewohnten zwei- 
dimensionalen, schon vorab registrierten Rontgenbildern. Naturlich kann die Navigation auch 
simultan in alien Bilddarstellungen erfolgen. Die zweidimensionalen, urspriinglichen Ront- 
genbilddaten, konnen besonders visualisiert werden, es ist beispielsweise moglich, dass der 
Chirurg diese Bilder sozusagen "durchblattert", bis er das gewtinschte, aussagekraftigste Bild 
flir die Navigation vor sich hat. Insbesondere ist auch von Vorteil, dass ohne zusatzliche Re- 
gistrierung mit Hilfe der zweidimensionalen Rontgenbildern navigiert werden kann. 
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Zur Kalibrierung des Rontgengerates kann dessen Position vorteilhaflerweise in der Relation 
zu einem vom Navigationssystem erfassbaren Kalibrierungsphantom ermittelt werden. Ge- 
m&fi einer bevorzugten Ausfuhrungsform der Erfindung werden wahrend der Kalibrierung des 
Rontgengerates Transformationsmatrizen betreffend die Raumlage der aufgenommenen 
Rontgenbilder erstellt. Dabei konnen bevorzugt mit der Ubergabe der urspriinglichen, zwei- 
diraensionalen Rontgenbilder an das Navigationssystem auch die den einzelnen Rontgenbil- 
dera zugeordneten Transformationsmatrizen iibergeben werden. 

In bevorzugter Ausgestaltung wird bei dem erfindungsgemaBen Verfahren als Rontgengerat 
ein C-Bogen-Rontgengerat verwendet, das RQntgenbilder in verschiedenen Drehstellungen 
darstellt, insbesondere isozentrische Rontgenbildfolgen. 

Die Erfindung betrifft ferner ein Programm, das, wenn es auf einem Computer lauft oder in 
einen Computer geladen ist, den Computer veranlasst, eines der oben genannten Verfahren 
durchzufiihren. Sie betrifft auch ein Computerprogramm-Speichermedium, das ein Programm 
aufweist, wie es oben definiert wurde. 

Die Erfindung wird im Weiteren anhand der beiliegenden Figuren und mittels eines Ausfiih- 
rungsbeispiels naher erlautert. Es zeigen: 

Figur 1 ein C-Bogen-Rontgengerat, ein Kalibrierungsverfahren; 

Figur 2 das C-Bogen-R6ntgengerat aus Figur 1 bei der Bildaufhahme; und 

Figur 3 eine Bilddarstellung, wie sie gemaB dem erfmdimgsgemaBen Verfahren bereit- 

gestellt werden kann. 

Die Figur 1 zeigt ein C-Bogen-Rontgengerat 1, dessen Bogen sich zur Aufhahme von Ront- 
genbildern urn die Achse 2 drehen kann, so dass eine Folge isozentrischer R^ntgenbildauf- 
nahmen erstellt werden kann. Am C-Bogen 1 ist auf der Oberseite die Strahlungsquelle 3 und 
gegenuber der Bildaufhehmer 4 dargestellt, der einen Kalibrierungsaufsatz tragt, welcher 
wiederum eine Markergeometrie 5 aufweist. Schematisch ist das Navigationssystem 9 einge- 
zeichnet, welches beispielsweise durch Kameras die Positionen des C-Bogens (tiber die Mar- 
kergeometrie 5) und von im Bestrahlungsfeld vorhandenen Objekten (zum Beispiel Kalibrie- 


rungsphantom 10 mit Markergeometrie 6 in Figur 1 bzw. Patient 8 mit Markergeometrie 7 in 
Figur 2) positionell erfasst und verfolgt. Uber eine nicht bezeichnete Datenverbindung konnen 
vom C-Bogen-Rontgengerate erfasste und moglicherweise schon verarbeitete Daten an das 
Navigationssystem 9 weitergeleitet werden. 

In Figur 1 ist das C-Bogen-RontgengerSt 1 beim Kalibrierungsvorgang dargestellt, wobei hier 
das Kalibrierungsphantom 10 in den Strahlengang eingesetzt wird, welches die Markergeo- 
metrie 6 auiweist, die wiederum vom Navigationssystem 9 erkannt werden kann. In Figur 2 
ist das C-Bogen-R6ntgengerat aus Figur 1 bei der Akquirierung von Patienten-Rontgenbildern 
gezeigt, wobei hier der Patient 8 im Strahlengang Iiegt, der wiederum die Markergeometrie 7 
tragt, welche vom Navigationssystem 9 erfassbar ist. 

Der Ablauf eines erfindungsgemafien Verfahrens gem&G einem Ausfiihrungsbeispiel, bei dem 
pra-kalibrierte Daten genutzt werden, um eine Navigation aus zweidimensionalen und drei- 
dimensionalen Daten simultan zu ermoglichen, wird im Folgenden erSrtert: 

In einem ersten Schritt wird der zur Navigation eingesetzte C-Bogen 1 in Relation zu dem 
Kalibrierungsphantom 10 kalibriert. Hierzu wird die Position des C-Bogens 1 in Relation zur 
Position des Phantoms 10 vom Kamerasystem des Navigationssystems 9 aufgenommen. Die- 
se Kalibrierung ermoglicht es, die wahrend der Bildaufhahme am Patienten akquirierten 
zweidimensionalen Daten umzurechnen, und zwar mit Hilfe von Transformationsmatrizen in 
Beziehung zueinander zu setzen und fur die dreidimensionale Navigation einzusetzen. 

Nach der Kalibrierung kann die Datenakquirierung am Patienten 8 erfolgen (Figur 2). Dazu 
wird die Position des C-Bogens 1 in Relation zum Patienten 8 vom Kamerasystem des Navi- 
gationssystems 9 aufgenommen. Nach dieser Positionsbestimmung erfolgt die Aufhahme ei- 
ner bestimmten Anzahl zweidimensionaler Rontgenbilder, die mit Hilfe der Kalibrierung in 
Relation zueinander und zum C-Bogen 1 und dadurch auch zum Patienten 8 gesetzt werden. 

Nach dem Abschluss der Akquirierung der zweidimensionalen Daten werden diese mit Hilfe 
der durch die Kalibrierung ermittelten Transformationsmatrizen in dreidimensionale Daten 
umgerechnet. Diese dreidimensionalen Daten werden an das Navigationssystem 9 ubergeben 


und konnen danach ftlr die computerunterstiitzte Chirurgie eingesetzt werden, da sie durch die 
Positionsbestimmung von C-Bogen 1 in Relation zum Patienten 8 bereits registriert sind. 

Beispielsweise in einem Speicher des C-Bogens bleiben aber die zweidimensionalen Ront- 
genbilddaten in ihrer urspriinglichen Form, d. h. mit den zugehOrigen Transformationsmatri- 
zen erhalten. ErfindungsgemaB werden nunmehr nicht nur — wie bisher tiblich — die Positi- 
onsinformationen (Transformationsmatrix) der dreidimensionalen Daten an das Navigations- 
system 9 iibergeben, sondern es erfolgt auch eine Ubergabe der zweidimensionalen Daten und 
der jeweils dazugehorigen einzelnen Transformationsmatrix fur jedes Rontgenbild. Damit 
werden diese urspriinglichen Daten, die mitsamt den notwendigen Raumlage- 
Positionsinformationen ohnehin zur Verfugung stehen, mit ihrem urspriinglichen Bildgehalt 
fiir die Navigation nutzbar, und sie konnen beispielsweise so dargestellt werden, wie es in 
Figur 3 gezeigt ist. 

Diese Figur 3 zeigt ein Beispiel fur die Bildausgabe eines Navigationssystems, die vier Bilder 
enthalt, namlich einerseits die tibliche 3D-Darstellung A, die aus dem dreidimensionalen, um- 
gerechneten Volumendatensatz erhalten wird, und andererseits drei zweidimensionale Dar- 
stellungen B (axial), C (lateral) und D (frontal). Bei den zweidimensionalen Darstelhmgen 
handelt es sich aber hier nicht um tibliche Rekonstruktionen von 2D-Bildern aus dem 3D- 
Datensatz, der auch fur die Darstellung A verwendet wird, sondern um die urspriinglich durch 
den C-Bogen 1 akquirierten Rontgenbilder, die schon vorab bei der Erstellung registriert war- 
den und fiir die jede einzelne Transformationsmatrix zum Erstellungszeitpunkt im Navigati- 
onssystem vorliegt, weil sie separat mit der 2D-Darstellung ubergeben worden ist. Der Chi- 
rurg kann nun wahrend der Operation sowohl auf den urspriinglichen zweidimensionalen 
RQntgenbildern als auch auf der dreidimensionalen Darstellung und in einer Kombination 
dieser Navigationsmoglichkeiten arbeiten. Vorteile sind insbesondere die bessere Darstel- 
lungsqualitat der urspriinglich zweidimensionalen Rontgenbilder im Vergleich mit den drei- 
dimensionalen, verrechneten Daten, insbesondere was den besseren Kontrast und die bessere 
Detailgenauigkeit betrifft. AuBerdem fallt es dem Chirurgen leichter auf solchen gewohnten, 
detailgenauen Rontgenbildern zu navigieren, da er schon von seiner Ausbildung her an die 
Interpretation solcher Bilder gewohnt ist. Es erfolgt vorteilhafterweise eine automatische Re- 
gistrierung der zweidimensionalen und der dreidimensionalen Daten und es sind besondere 


Visualisierungsarten moglich, zum Beispiel konnen die Rontgenbilder B, C und D durch die 
RQntgenbildfolge sozusagen "durchgeblattert" werden; es kann also solange das nachste Bild 
aufgerufen werden, bis der Chirurg das optimale Bild fur die Navigation gefunden hat. 
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Verfahren zur Bilddarstellung bei einem medizinischen Navigationssystem mit Ront- 

genbilduntersttttzung, bei dem 

mittels eines vorab im Navigationssystem kalibrierten Rontgengerates eine Viel- 
zahl von Rontgenbildern eines Patienten aus unterschiedlichen Positionen erstellt 
werden, wahrend mittels eines medizinischen Navigationssystems eine Positions- 
bestimmung fiir das RSntgengerat erfolgt, 

die erhaltenen Patientendaten aus den erstellten Rontgenbildern durch Verarbei- 
tung im Rontgengerat-System auf der Basis der Kalibrierung ausgewertet und 
raumlich umgesetzt werden, 

zus&tzlich zu den ausgewerteten und umgesetzten Patientendaten noch die ur- 
spriinglichen zweidimensionalen RSntgenbilder und die den Rontgenbildern zu- 
gehorigen Erstellungsinformationen an das Navigationssystem ubergeben werden, 
und bei dem 

die zweidimensionalen R6ntgenbilder navigationsunterstiitzend auf einer Bildaus- 
gabe des Navigationssystems angezeigt werden. 

Verfahren nach Anspruch 1, bei dem zur Kalibrierung des Rontgengerats dessen Positi- 
on in Relation zu einem vom Navigationssystem erfassbaren Kalibrierungsphantom er- 
mittelt wird. 

Verfahren nach Anspruch 1 oder 2, bei dem wahrend der Kalibrierung des RQntgenge- 
rats Transformationsmatrizen betreffend die Raumlage der aufgenommenen Rontgen- 
bilder erstellt werden. 

Verfahren nach Anspruch 3, bei dem mit der Ubergabe der urspriinglichen, zweidimen- 
sionalen Rontgenbilder an das Navigationssystem auch die den einzelnen Rontgenbil- 
dern zugeordneten Transformationsmatrizen ubergeben werden. 
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5. Verfahren nach einem der Anspriiche 1 bis 4, bei dem als RontgengerSt ein C-Bogen- 
Rontgengerat verwendet wird, das Rontgenbilder in verschiedenen Drehstellungen er- 
stellt, insbesondere isozentrische Rontgenbildfolgen. 

6. Programm, das, wenn es auf einem Computer lauft oder in einem Computer geladen ist, 
den Computer veranlasst, ein Verfahren gemaB einem der Anspriiche 1 bis 5 durchzu- 
fiihren. 

7. Computerprogramm-Speichermedium, das ein Programm nach Anspruch 6 aufweist. 
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Zusammenfassung 


Die Erfindung betriffi ein Verfahren zur Bilddarstellung bei einem medizinischen Navigati- 

onssystem mit Rontgenbildunterstutzung, bei dem 

mittels eines vorab im Navigationssystem kalibrierten Rontgengerates eine Vielzahl von 
Rontgenbildern eines Patienten aus unterschiedlichen Positionen erstellt werden, wah- 
rend mittels eines medizinischen Navigationssystems eine Positionsbestimmung fur das 
R6ntgengerat erfolgt, 

die erhaltenen Patientendaten aus den erstellten Rontgenbildern durch Verarbeitung im 
Rontgengerat-System auf der Basis der Kalibrierung ausgewertet und raumlich umge- 
setzt werden, 

zusatzlich zu den ausgewerteten und umgesetzten Patientendaten noch die ursprungli- 
chen zweidimensionalen Rontgenbilder und die den Rontgenbildern zugehorigen Er- 
stellungsinformationen an das Navigationssystem ubergeben werden, und bei dem 
die zweidimensionalen Rontgenbilder navigationsunterstiitzend auf einer Bildausgabe 
des Navigationssystems angezeigt werden. 
Ferner betrifft sie ein Programm, das, wenn es auf einem Computer lauft oder in einem Com- 
puter geladen ist, den Computer veranlasst, ein solches Verfahren durchzufuhren, sowie ein 
Computerprogramm-Speichermedium, das ein solches Programm aufweist. 
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